![arxiv：2403.17516v2 [cs.cl] 2024年4月2日](/simg/4/43c9603b2a3109e7a1f3c181045e6c0e154d84ed.webp)
机构名称：
¥ 1.0
从大脑方面解码连续语言是一个强大而有前途的研究领域。对于有助于言语障碍的人通过大脑信号进行交流特别重要。此字段解决将大脑信号映射到文本的复杂任务。以前的最佳尝试以间接的方式逆转了这一过程：它始于学习从文本中编码大脑活动，然后通过与预测的大脑反应对齐来编码引导文本生成。相比之下，我们采用了一种简单而有效的方法，该方法通过将其直接与根据大脑活动映射的预测文本嵌入进行比较来指导文本重建。全面的实验表明，我们的方法明显胜过当前的最新模型，显示了BLEU和流星得分的平均提高77％和54％。我们通过详细的消融研究和案例分析来验证所提出的模块，并突出一个关键的相关性：我们将大脑活动映射到文本嵌入的情况越多，文本重建结果越好。这种洞察力可以简化从大脑活动中重新构建语言的任务，以强调实现大脑到文本的映射技术的重要性。
arxiv：2403.17516v2 [cs.cl] 2024年4月2日
主要关键词
![arxiv：2403.17516v2 [cs.cl] 2024年4月2日PDF文件第1页](/bimg/0/08ab097c9d82002a5cdf010435fd07ee9b40f7a6.webp)
![arxiv：2403.17516v2 [cs.cl] 2024年4月2日PDF文件第2页](/bimg/0/0b3860e169e55414e654e8d7a03f6dcb0377d135.webp)
![arxiv：2403.17516v2 [cs.cl] 2024年4月2日PDF文件第3页](/bimg/c/c073dd1ea9bc62f63495d96fa3b31c504631f9f4.webp)
![arxiv：2403.17516v2 [cs.cl] 2024年4月2日PDF文件第4页](/bimg/d/dd130749d69884389cb0aee99ad9d0cd60cb6bec.webp)
![arxiv：2403.17516v2 [cs.cl] 2024年4月2日PDF文件第5页](/bimg/e/ec3b89ab0556a47e94cce08af6f8b532430e0128.webp)
相关文件推荐
![arxiv：2403.01906v1 [Math.oc] 4 2024年3月4日](/simg/7/7db3dab00baefebcf58c1604d3e3819b168d0a85.webp)
![arxiv：2402.07016v1 [cs.ai] 2024年2月10日](/simg/9/9561106bbf3c742ff1228e38f3ed355eb69ea4a7.webp)
![arxiv：2402.00199v1 [cs.ro] 2024年1月31日](/simg/e/ee7df0852113cb2e9395d1f5f6861b37ca99386c.webp)
![arxiv：2103.01709v1 [Quant-ph] 2 2021年3月2日](/simg/3/37b8f8c2643d3d5f16220f05a149d3fed86ec5d6.webp)
![arxiv：2205.09711v3 [Quant-ph] 2 2023年3月2日](/simg/1/1d7b8184161e3118879fea12610d6bc7422a7d62.webp)
![arxiv：2108.01170v1 [Quant-ph] 2021年8月2日](/simg/b/bd2555fac184cf172dbca9e56dbb5786c309ab00.webp)
![arxiv：2412.11918v1 [Quant-ph] 2024年12月16日](/simg/e/ed3f2b369bed5135dca7fbf16cfa70d45057deef.webp)
![arxiv：2502.00832v1 [CS.CL] 2025年2月2日](/simg/4/460750c88b2c2a3b4270f4bf1f9583392a580e2b.webp)
